【Databricks,Datastage,PySpark,ETL/リモート併用】DatastageからDatabricksへのマイグレーション、パイロット検証【ミドル・シニアエンジニア(40代、50代、60代)】の案件

• 〜 800,000 円 / 月
• 業務委託（フリーランス）
• 中央区

言語・環境

指定なし

ポジション

システムエンジニア

期間

2026年6月～2026年12月末（延長の可能性あり）

面談回数

1回

作業内容

現行ETL基盤（IBM Datastage）からDatabricks（Lakehouse基盤）への移行パイロット検証に参画。
移行可否・移行方式・ツールの有効性を検証。

・Datastage既存ジョブの構造・処理内容の確認
・マイグレーションツールを用いたDatabricksへの変換
・変換結果の動作検証（PySpark／SQL／Workflow等）
・DatastageとDatabricksの処理結果比較（データ品質・性能等）
・ツールで変換できない部分の手動移行検証
・検証結果の整理（課題・改善点・移行可否判断材料の作成）
・パイロット結果を踏まえた移行方式の提案・フィードバック

求めるスキル

【必須スキル】
・ETL開発の経験（Datastage等）
・Databricks（ノートブック・Workflow・Delta Lake）の利用経験
・Spark／PySpark／SQLを用いたデータ処理経験
・データパイプラインの設計・実装経験
・新技術の検証やPoCに対応できる方

【尚可】
・Datastageの実務経験
・データレイク・DWH・ETL移行プロジェクトの経験
・マイグレーションツールの検証・評価経験

担当者よりコメント

担当者よりコメント